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摘要 : 明 安 图 射电 频谱 日 像 仪 (Mingantu Ultrawide SpEctral Radioheliograph, MUSER) & 
经 完成 硬件 建设 ,与 之 配套 的 数据 处 理 系统 也 初步 开发 完成 。 为 提高 用 户 操作 的 可 用 性 ， 简 
化 操作 难度 ， 数 据 处 理 系 统 在 提供 传统 的 命令 行 用 户 界 面 的 同时 ， 也 提供 了 网 络 交互 方式 。 
简单 介绍 了 Web.py 的 基本 概念 和 内 部 组 件 交互 流程 ， 讨 论 了 基于 Web.py 进行 网 络 开发 的 方法 
和 流程 ， 并 利用 Web.py 框架 实现 了 数据 处 理 系统 的 网 络 界 面 交 互 。 成 果 已 经 应 用 ， 提 高 了 日 
像 仪 数据 处 理 系统 的 可 用 性 ， 也 为 其 它 天 文 软 件 系 统 的 开发 提供 了 一 定 的 借鉴 与 参考 价值 。 
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为 推动 国内 太阳 射电 天 文 观测 技术 的 发 展 ， 我 国 天 文学 家 提出 建设 的 明 安 图 射电 频谱 日 像 仪 已 经 
全 面 建成 和 ]。 该 设备 可 以 在 厘米 -分 米 波 段 对 太阳 同时 进行 高 空间 、 高 时 间 和 高 频率 观测 ， 观 测 所 得 
数据 可 以 更 好 地 研究 太阳 活动 。 项 目 分 两 期 建设 ， 第 1 期 是 MUSER-I 低频 阵 (0.4~2 GHz) ， 由 40 个 
4.5 m 的 天 线 组 成 ， 在 64 个 频率 上 成 像 ; 第 2 期 MUSER-II 高 频 阵 (2~15 GHz)， 由 60 面 2m 的 天 线 
组 成 ， 在 528 个 频率 上 成 像 。 

明 安 图 射电 频谱 日 像 仪 的 数据 处 理 系统 是 整个 项 目的 关键 组 成 部 分 ， 设 计 并 实现 快速 、 可 靠 、 方 
便 的 数据 处 理 软 件 已 成 为 发 挥 望 远 镜 作 用 的 重要 支撑 。 当 前 基于 浏览 器 /服务 器 (B/S) 模式 开发 网 络 
应 用 软件 已 经 成 为 软件 开发 的 主流 ， 一 方面 ， 这 一 类 软件 具有 高 移植 性 的 特点 ; 另 一 方面 ， 网 络 应 用 
软件 无 需 部 署 ， 对 后 期 维护 非常 有 利 。 从 长 远 建设 来 看 ， 实 现 一 个 具有 友好 人 机 交互 的 网 络 界面 ， 集 
成 相应 的 数据 处 理 程序 ， 满 足 现场 观测 以 及 远程 数据 处 理 的 要 求 是 非常 必要 的 。 

开发 网 络 应 用 可 用 的 技术 很 多 ， 最 为 常见 的 是 基于 J2EE 或 者 .NET 技术 ， 分 别 采用 Java 与 C# 语 
言 开 发 。 一 般 来 说 ， 这 一 类 软件 存在 部 署 运行 环境 复杂 、 开 发 周期 较 长 等 不 足 。 近 年 来 ， 天 文 软件 开 
发 大 多 采用 Python 语言 ， 明 安 图 射电 频谱 日 像 仪 的 数据 处 理 系统 也 是 基于 Python 开发 完成 。 为 了 更 
好 地 和 数据 处 理 系统 集成 和 交互 ， 明 安 图 射电 频谱 日 像 仪 的 网 络 用 户 界面 同样 采用 Python 语言 开发 。 
本 文 首先 介绍 了 数据 处 理 系 统 的 架构 及 操作 界面 的 功能 ， 接 着 讨论 了 轻 量 级 网 络 框架 Web.py 的 内 部 
组 件 交 互 流程 ， 重 点 讨论 了 使 用 Python 语言 和 Web.py 进行 快速 开发 的 方法 ， 以 及 如 何 利 用 Web.py 
框架 实现 网 络 界面 与 功能 封装 。 


1 明 安 图 射电 频谱 日 像 仪 数据 处 理 系 统 


随 着 望远镜 性 能 的 显著 提升 ， 产生 的 数据 成 倍增 长 ， 处 理 过 程 日 趋 复 杂 ， 计 算 机 软件 系统 已 成 为 
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天 文 数据 处 理 中 不 可 或 缺 的 工具 。 天 文 软 件 系 统 可 以 分 为 数据 处 理 和 数据 发 布 两 大 类 。 数 据 处 理 软件 
一 般 部 署 于 本 地 ， 采 用 单机 或 计算 机 集群 方式 完成 观测 数据 的 处 理 ， 包 括 最 为 常见 的 IDL, CASA, 
AIPS 等 。 数 据 发 布 软件 一 般 基 于 网 络 应 用 和 表述 性 状态 传递 ( Representational State Transfer, REST) 风 
格 的 网 络 服务 发 布 技术 ， 如 虚拟 天 文 台中 的 锥 形 检索 等 。 

在 明 安 图 射电 频谱 日 像 仪 的 日 常数 据 处 理 中 ,包含 了 两 方面 的 需求 ， 一 是 对 历史 数据 的 处 理 ， 男 
外 一 个 是 每 5 秒 钟 的 采样 观测 数据 的 实时 处 理 。 为 了 满足 高 速 数 据 处 理 的 需求 ， 开 发 和 实现 了 一 套 部 
署 于 明 安 图 观测 站 的 高 性 能 计算 系统 '”。 同 时 为 了 天 文学 家 离线 处 理 的 需要 ， 开 发 了 一 套 可 运行 在 
单机 上 的 客户 端 软 件 ， 实 现 与 CASA 类 似 的 功能 。 日 像 仪 软件 系统 整体 功能 结构 如 图 1， 主 要 包括 3 
部 分 ， 分别 用 于 核心 数据 处 理 、 用 于 交互 的 用 户 界面 以 及 数据 库 。 核 心 数据 处 理 模 块 采 用 Opencluster ^! 
框架 ， 支 持 分 布 式 任务 调度 。 核 心 的 底层 数据 获取 、 数 据 处 理 ( 包 括 CLEAN, FFT, IFFT 等 ) 、 数 据 存 
fi& UVFITS 等 ) 等 功能 已 经 基于 Python 开发 完成 “”， 并 通过 Opencluster 实现 整个 计算 资源 的 分 配 和 调 
度 。 软 件 系统 采用 MySQL 数据 库存 储 数据 处 理 中 的 若干 关键 参数 ， 如 光纤 传输 时 延 、 气 象 数据 等 !9 ， 
同时 为 了 提高 查询 速度 ， 也 支持 将 数据 导出 到 Redis 内 存 数据 库 。 用 户 界 面 主要 实现 数据 处 理 任务 提 
交 、 天 线 状态 维护 、 自 动 气象 站 和 卫星 数据 修正 配置 等 功能 。 

目前 ， 明 安 图 射电 频谱 日 像 仪 已 经 实现 了 与 CASA 操作 类 似 的 命令 行 (CLI) 接口 '”， 但 命令 行 方 
式 存 在 命令 多 、 表 现 方 式 不 直观 等 不 足 。 为 了 进一步 提高 数据 处 理 系统 的 使 用 效率 ， 使 用 Web.py JF 
发 了 更 为 友好 的 数据 处 理 系统 交互 界面 。 
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图 1 明 安 图 射电 频谱 日 像 仪 数据 处 理 系统 结构 图 
Fig. 1 The structure chart of MUSER data processing system 


2. Web.py 框架 分 析 


Web.py * i—i Python 实现 的 轻 量 级 网 络 应 用 开发 框架 ， 支 持 模型 -视图 -控制 器 ( Model View 
Controller，MVC ) 模 式 开发 ， 可 通过 简单 的 编程 将 普通 的 Python 类 映射 为 请 求 处 理 对 象 ， 原 生 支 持 编 
写 REST 架构 风格 的 网 络 服务 ， 当 前 的 版 本 是 0. 38。Web.py 提供 了 最 小 化 的 网 络 服务 器 ， 可 以 作为 
一 个 独立 的 守护 进程 运行 ， 或 者 借助 于 网 络 服务 器 网 关 接 口 (Web Server Gateway Interface, WSGI) 在 
任何 兼容 它 的 服务 器 上 运行 。 

Web.py 不 依赖 于 其 他 第 三 方 Python 库 ， 可 以 下 载 官 方 的 二 进 制 包 (http :// webpy.org/static/web.py- 
0.38.tar.gz) ， 解 压缩 后 执行 python setup.py install 命令 进行 安装 ， 也 可 以 通过 easy. install 或 pip 方式 安装 。 
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Web.py 框架 执行 过 程 主要 在 application.py、wsgi.py、httpserver.py 和 wsgiserver 目录 的 模块 初始 化 
文件 _init_.py 这 4 个 文件 中 定义 。application.py 是 一 个 网 络 应 用 运行 的 入 口 ， wsgi.py 是 将 网 络 应 用 运 
行 在 内 置 的 简单 的 网 络 服 务 器 ， 或 者 兼容 WSGI 标准 的 服务 器 (如 FastCGI); httpserver.py 是 内 置 的 网 
络 服务 器 ， 符 合 WSGI 规范 ; wsgiserver 目录 中 的 _init_.py 文件 负责 创建 服务 器 ， 接 收 客户 端 请 求 ， 并 
响应 请 求 。 从 浏览 器 访问 开始 ，Web.py 的 内 部 执行 流程 如 图 2, 
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E 2 Web.py 组 件 图 
Fig.2 The component diagram of Web.py 


Web.py 中 网 络 应 用 在 构建 时 ， 需 传人 统一 资源 定位 符 (Uniform Resource Locator, URL)， 它 是 访 
问 当 前 网 络 应 用 的 相对 路 径 和 负责 处 理 该 路 径 请 求 的 Python 类 的 一 个 二 元 组 的 集合 。 每 当 浏 览 器 发 
出 新 的 请 求 ，Web.py 将 请 求 的 路 径 和 URLs 中 路 径 做 匹配 ， 最 终 将 请 求 代理 到 定义 的 Python 类 中 相 
应 的 方法 执行 。 应 用 启动 时 ， 在 wsgi.py 文件 中 根据 环境 变量 配置 不 同 ， 分别 启动 不 同 的 WSGI 处 理 
人 右 (FastCGI、flup、 内 置 简单 网 络 服 务 右 )。 启 动 内 置 网 络 服务 峰 时 ， 首 先 调 用 httpserver.py 中 的 
runsimple 方法 ，runsimple 方法 再 调用 WSGlServer 方法 ，WSGIServer 中 创建 使 用 了 CherryPy 的 基于 线 
程 池 的 WSGI 服务 器 ， 其 类 的 定义 为 CherryPyWSGIServer。 

CherryPyWSGIServer 的 构造 函数 中 ， 执 行 初始 化 线程 池 、WSGI 网 关 等 操作 。 启 动 服务 器 时 执行 
CherryPyWSGIServer 的 基 类 HTTPServer 中 的 start 方法 ， 在 指定 地 址 和 端口 监听 客户 端 请 求 ， 具 体 的 
请 求 处 理 ， 由 执行 请 求 任 务 的 WorkerThread 线程 处 理 。 


3 ”交互 界面 设计 


数据 处 理 系 统 用 户 界 面 需要 实现 天 线 状态 、 天 线 位 置 、 气 象 条 件 、 光 纤 延 迟 等 数据 维护 及 数据 处 
理 任务 提交 等 功能 。 本 节 重 点 介绍 使 用 Web.py 开发 过 程 中 几 个 关键 技术 。 
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3.1 URL 设计 与 处 理 

就 一 个 网 络 应 用 而 言 ，URL 的 组 织 是 最 重要 的 部 分 ， 良 好 的 URL 设计 能 清晰 地 表达 整个 网 络 应 
用 软件 的 控制 思路 。Web.py 中 URL 的 定义 支持 RESTful 的 格式 ，RESTful 的 URL 具有 结构 清晰 、 符 
合 标准 、 易 于 理解 、 扩 展 方便 等 优点 ， 因 此 网 络 交互 界面 的 URL 也 使 用 RESTful 设计 。 

REST 中 包含 了 两 个 重要 概念 ,一 是 资源 ， 二 是 状态 转移 。 资 源 代表 了 操作 对 象 ， 通 常 是 名 词 ， 
命名 方式 一 般 和 数据 库 的 表 名 对 应 。 表 1 列 出 了 网 络 交 互 界面 的 部 分 类 和 资源 的 对 应 关系 。 状 态 转 移 
代表 了 对 资源 的 操作 导致 资源 的 状态 发 生变 化 ， 具 体 到 HTTP. 协议 中 就 是 4 个 表示 操作 方式 的 动词 : 
GET, POST, PUT 和 DELETE， 正 好 对 应 到 增 、 删 、 查 、 找 (Create，Read，Update，Delete，CURD ) 
4 种 数据 操作 。 在 Web.py 框架 实现 GET, POST, PUT, DELETE 方法 ， 只 需要 在 相应 的 处 理 类 中 定 
义 同 名 的 函数 即 可 。 系 统 主 要 用 到 GET 和 POST 两 种 请 求 ，GET 请 求 用 于 获取 数据 ，POST 请 求 主 要 
用 于 插入 或 者 修改 数据 时 提交 新 的 表单 请 求 。 


表 1 网 络 交 互 界面 的 类 和 资源 的 对 应 关系 
Table 1 Mappings of classes to resourcesin MUSER web design 


URL Python 类 说 明 
/ Index 首页 
/antenna Antenna 天 线 
/antenna/ position AntennaPosition 天 线 位 置 
/antenna/flag AntennaFlag 天 线 状 态 
/antenna/ delay AntennaDelay 光纤 延迟 
/parameter Parameter 系统 参 
/job Job 计算 任务 


Web.py 的 URL 控制 模式 人 简单、 灵活 。 网 络 应 用 启动 时 ， 需 要 将 所 有 URL 和 Python 类 的 映射 关 
系统 一 定义 在 一 个 元 组 列表 中 ， 元 组 的 格式 为 : (“URL 相对 路 径 >,“ 处 理 类 ”) ,例如 表 1 中 对 天 线 
的 操作 ， 使 用 的 路 径 是 “/antenna”， 处 理 类 是 “Antenna”， 则 元 组 的 定义 为 (“/antenna”,“Antenna”)。 

此 外 ，Web.py 提供 了 强大 的 正则 表达 式 设计 更 灵活 的 URL 路 径 ， 例 如 查询 一 个 计算 任务 状态 的 
URL 可 以 定义 为 “/job/(.+)”， 在 /job/ 后 面 的 内 容 会 被 捕 提 ， 然 后 作为 参数 被 用 在 GET 或 POST 方 
法 中 。 假 设 一 个 计算 任务 ID 为 10， 可 以 使 用 “/jobp/10” 查 询 其 执行 状态 。“/job/10” 能 成 功 匹 配 “/ 
job/(.+)”， 在 具体 查询 的 处 理 类 中 可 以 获得 这 个 计算 任务 ID ， 再 执行 具体 的 查询 ， 并 返回 结果 。 

3.2 ”数据库 操作 

Web.py 支持 多 种 数据 库 操 作 。Web.py 封 沪 了 各 种 数据 库 的 操作 ,支持 事务 ， 提 供 了 简单 易 用 的 
应 用 程序 编程 接口 ， 如 表 2。 具 体 和 数据 库 的 底层 操作 需要 借助 于 相应 数据 库 操作 模块 ， 如 MySQL 
的 Python JÆ MySQLdb, SQLServer 的 Python JÆ pymssql。Web.py 的 数据 库 部 分 的 相关 代码 在 db.py X 
件 中 ， 入 口 函 数 是 database( ) 。 根 据 dbn( 数 据 库 名 ) 从 diet 里 查找 对 应 类 型 数据 库 的 实现 类 ， 再 用 其 
余 参 数 初始 化 这 个 数据 库 实现 类 ,返回 具体 的 数据 库 操作 对 象 ， 使 用 这 个 对 象 实现 对 数据 库 表 执行 
增 、 删 、 改 、 查 的 操作 。 


表 2 Web.py 数据 库 操作 方法 
Table 2 Methods of database operations in Web.py 


方法 功能 实例 

insert 新 增 db.insert (self， 表 名 ， 变 量 1， 变 量 2，…) 
query 查询 db.query (self， 表 名 ， 变 量 1， 变 量 2，…) 
update 更 新 db.update (self， 表 名 ， 变 量 1， 变 量 2，…) 


delete 删除 db.delete (self， 表 名 ， 变 量 1， 变 量 2，…) 
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数据 处 理 系 统 用 到 了 MySQL 和 Sqlite 数据 库 ， 以 及 Redis 内 存 存储 。 其 中 MySQL 作为 主 数据 库 
支持 读 写 操 作 ，Sqlite 在 单机 版 处 理 系统 使 用 ，Redis 主要 在 分 布 式 环境 中 使 用 。 系 统 定时 将 MySQL 
的 数据 导出 到 Sqlite 和 Redis, Sqlite 和 Redis 在 数据 处 理 系 统 中 提供 只 读 操 作 ， 以 保障 数据 的 一 致 性 。 
Redis 是 一 个 基于 内 存 刍 值 存储 系统 ， 文 持 高 速 高 并 发 的 读 写 操作 ， 为 明 安 图 射电 频谱 日 像 仪 的 分 布 
式 处 理 环 境 气 象 、 天 线 相关 参数 的 高 速 访问 提供 了 保障 。Redis 不 是 关系 型 数据 库 ， 它 的 访问 和 操作 
需要 使 用 Python 的 redis 库 。 

3.3 Bie 

网 络 框架 都 提供 模板 技术 实现 复杂 的 网 络 页 面 ，Web.py 也 不 例外 。Web.py 的 模板 功能 实现 的 源 
人 码 在 template.py 文件 中 。Web.py 的 模板 语言 使 得 可 以 在 模板 文件 HTML 中 使 用 Python 语言 的 强大 功 
能 ， 每 一 个 HTML 文件 必须 在 第 1 行 通过 $ def with( ) 定义 在 该 文件 中 用 到 的 所 有 变量 ， 这 些 变量 名 
需要 和 Python 中 返回 模板 文件 的 变量 命名 一 致 ， 在 HTML 中 就 可 以 直接 使 用 这 些 变量 。 

Web. py 模板 的 强大 之 处 除了 引用 Python 中 变量 ， 还 文 持 流程 控制 ， 语 法 与 Python 类似。 控制 
结构 语句 前 面 需 要 加 上 “$”， 可 以 实现 for, while, if, elif 和 else 等 语句 。 如 明 安 图 射电 频谱 日 像 仪 
中 的 任务 处 理 列表 的 部 分 模板 如 下 s 


„4 
V | 
k 


$ for job in jobs:;//jobs 为 任务 列表 变量 


f 
Y 


N $ job.status// 输 出 单个 任务 的 状态 


让 


CO 
LJ 


Web.py 的 模板 支持 在 Python 中 Render 泻 染 模板 文件 ， 也 可 以 直接 泻 染 HTML 的 字符 串 。 如 显示 
气象 数据 列表 ， 需 要 匹配 weather.html 模板 ,使 用 如 图 3 的 代码 。 


fl 


web.template.render(template path, base=“layout”, global vars).weather(vars) 


模板 目录 母 模板 全 局 参数 模板 名 当前 模板 变量 


图 3 Web.py 44578 3e oL9] 
Fig.3 Specification of template-rendering in Web.py 


c 明 安 图 射电 频谱 日 像 仪 中 使 用 一 个 专门 的 模板 文件 夹 templates， 存 放 所 有 的 模板 文件 。 响 应 客户 
© 端 请 求 时 ，Web.py 从 模板 目录 寻找 模板 文件 ， 匹 配 相应 的 模板 文件 后 ， 渔 染 这 个 模板 文件 并 返回 浏 


Js. Web.py 支持 模板 舱 套 ， 可 以 使 用 base 指定 母 模 板 。 


4 系统 界面 


基于 Web.py 开发 的 数据 处 理 系 统 用 户 界面 已 基本 开发 完成 并 应 用 到 实际 数据 处 理 中 ， 前 端 使 用 
Bootstrap 构建 了 响应 式 页 面 ， 系 统 界 面 如 图 4。 系统 实现 了 在 命令 行 界面 配置 系统 参数 ， 为 多 方面 数 
据 ( 原 始 数 据 、 异 常 天 线 信 息 、 仪 絮 状 态 、 天 气 ) 的 录入、 维护 、 查 询 和 使 用 提供 了 方便 ， 确 保 了 后 
续 数 据 处 理 的 有 效 性 和 可 靠 性 。 同 时 ， 网 络 界面 提供 的 数据 处 理 参数 的 配置 ， 方 便 了 复杂 任务 的 提 
交 ， 与 命令 行 界面 相 比 ， 具 有 更 好 的 交互 性 和 可 用 性 。 


5 结束语 


本 文 介绍 了 基于 Web.py 框架 进行 明 安 图 射电 频谱 日 像 仪 数据 处 理 系 统 用 户 界 面 开 发 的 过 程 。 通 过 
Web.py 轻 量 级 框架 提供 的 核心 模块 可 以 根据 需求 快速 开发 出 一 个 稳定 有 效 的 网 络 应 用 程序 。Web.py 
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具有 轻巧 简单 、 代 码 设计 风格 简洁 的 特点 。 实 践 证 明 ， 采 用 Web.py 开发 的 程序 稳定 可 靠 ， 能够 满足 
日 像 仪 数据 处 理 系 统 中 用 户 界面 开发 的 需求 。 目 前 ， 系 统 初 步 搭建 完毕 ， 但 是 仍然 有 不 足 的 地 方 ， 例 
如 更 可 靠 地 数据 错误 校 验 ， 数 据 编辑 用 户 友 好 性 提升 ， 以 及 提供 更 多 的 实时 交互 功能 ， 这 些 将 在 后 续 
工作 中 继续 研究 和 探讨 。 


SN 
Q MUSER &®DashBoard Task- ”中 Calibrationv {Antenna~ &@Weather — Configuration 


E Integration Task 


From : | 2012-11-22 00:00:00 To : | 2016-12-22 23:59:59 | a searen | Bm 


ID Time Span Integration Time(Seconds) Array Create Time Status Operations 

17 2015-11-01 12:08:50 ~ 2015-11-01 12:08:51 1.0 MUSER-I 2016-04-06 15:53:36 Running... ac 

16 2015-11-01 12:08:50 ~ 2015-11-01 12:08:52 — 10 MUSER- 2016-03-10 00:00:00 ^ Completed EGgc 

2 2015-11-01 12:08:50 ~ 2 ^) |= Dotai | 

e ) MUSER 

6 2015-11-01 12:08:50 ~ 2 人 Gr | Z Reset | 

1 2015-11-01 12:08:50 - 24 ES Integration Task (Integration-9) Gg 

3 2015-11-01 12:08:50 ~ 20. EG 
Time Span 2015-11-01 12:08:50 ~ 2015-11-01 12:08:52 Integration Time 1.0 seconds 

4 2015-11-01 12:08:50 ~ 2 GEI 
Array MUSER-I Status 

5 2015-11-01 12:08:50 ~ 2 | j Detail | = Reset 


9 2015-11-01 12:08:50 ~ 2 


号 Sub Tasks 
14 2015-11-01 12:08:50 ~ 2 


Integral Repeat 
Time Array Number Number Status Operation 


15 2016-03-01 10:00:00 ~ 2 


MUSER- 40 


1 Success... 


20151101120850.007259 Total:11,1/1 Pages 


20151101120851.007259 MUSER-I 40 1 Success... 


图 4 明 安 图 射电 频谱 日 像 仪 数据 处 理 系统 用 户 界面 


201711.01326v1 
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Fig.4 The user interface of MUSER data processing system 
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Abstract: The hardware construction of Mingantu Ultrawide SpEctral Radioheliograph ( MUSER ) has 
been completed, and data processing system for the MUSER project has also been completed. In order to 
improve its user operation availability, simplify its operation difficulty, MUSER data processing system 
provides both the traditional command-line interface and the WEB interface for the users. This paper 
introduced a framework named web.py and discussed how to apply the framework to quickly develop a WEB 
interface for MUSER. Overall, for astronomy software written in Python, web. py is a proper choice in 
developing its WEB interface. 

Key words: Astronomy software; Web.py; User interface 


